# mysql 中的日志

# 1. mysql 中的错误日志

/*
1) 错误日志(Error Log)是 MySQL 中最常用的一种日志,主要记录 MySQL 服务器启动和停止过程中的信息、服务器在运行过程中发生的故障和异常情况等。

2) 在 MySQL 数据库中,默认开启错误日志功能。一般情况下,错误日志存储在/var/log/mysql/mysqld.log 


注意:错误日志中记录的并非全是错误信息,例如 MySQL 如何启动 InnoDB 的表空间文件、如何初始化自己的存储引擎等,这些也记录在错误日志文件中。
*/

-- 查看错误日志
mysql> show variables like '%log_err%';
+----------------------------+----------------------------------------+
| Variable_name              | Value                                  |
+----------------------------+----------------------------------------+
| binlog_error_action        | ABORT_SERVER                           |
| log_error                  | /var/log/mysql/mysqld.log              |
| log_error_services         | log_filter_internal; log_sink_internal |
| log_error_suppression_list |                                        |
| log_error_verbosity        | 2                                      |
+----------------------------+----------------------------------------+
5 rows in set (0.00 sec)

/*
[root@iZ2ze58f53sxjm9z7mgn5xZ log]# ls mysql/mysqld.log
-rw-r----- 1 mysql mysql 0 Sep 14 03:06 mysql/mysqld.log
*/

/*
1) 在 MySQL 中,可以使用 mysqladmin 命令来开启新的错误日志,以保证 MySQL 服务器上的硬盘空间。mysqladmin 命令的语法如下
[root@iZ2ze58f53sxjm9z7mgn5xZ mysql]# mysqladmin -uroot -p flush-logs

2) 执行该命令后,MySQL 服务器首先会自动创建一个新的错误日志,然后将旧的错误日志更名为 filename.err-old

3) MySQL 服务器发生异常时,管理员可以在错误日志中找到发生异常的时间、原因,然后根据这些信息来解决异常。对于很久之前的错误日志,查看的可能性不大,可以直接将这些错误日志删除。
*/

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36

# 2. mysql 中的二进制日志(bin log)

# 2.1 binlog 的基本介绍
/*
1) bin log 记录了所有的DDL(数据定义语言)语句和DML(数据操纵语言)语句,但是不包括数据查询(select、show)等语句.

2) bin log 的作用
    A) 灾难时的数据恢复
    B) mysql 的主从复制,在mysql8版本中,默认bin log 是开启的
*/

-- 查询bin log相关参数
mysql> show variables like '%log_bin%';
+---------------------------------+-----------------------------+
| Variable_name                   | Value                       |
+---------------------------------+-----------------------------+
| log_bin                         | ON                          |        -- bin log 开关
| log_bin_basename                | /var/lib/mysql/binlog       |        -- bin log 文件位置,binlog是文件前缀
| log_bin_index                   | /var/lib/mysql/binlog.index |        -- bin log 索引文件
| log_bin_trust_function_creators | OFF                         |
| log_bin_use_v1_row_events       | OFF                         |
| sql_log_bin                     | ON                          |
+---------------------------------+-----------------------------+
6 rows in set (0.00 sec)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
# 2.2 binlog 的日志格式
/*
mysql binlog日志有三种格式,分别为Statement,MiXED,以及ROW
1) 1.Statement:每一条会修改数据的sql都会记录在binlog中
    优点:不需要记录每一行的变化,减少了binlog日志量,节约了IO,提高性能。(相比row能节约多少性能与日志量,这个取决于应用的SQL情况,正常同一条记录修改或者插入row格式所产生的日志量还小于Statement产生的日志量,
    但是考虑到如果带条件的update操作,以及整表删除,alter表等操作,ROW格式会产生大量日志,因此在考虑是否使用ROW格式日志时应该跟据应用的实际情况,其所产生的日志量会增加多少,以及带来的IO性能问题。)

    缺点:由于记录的只是执行语句,为了这些语句能在slave上正确运行,因此还必须记录每条语句在执行的时候的一些相关信息,以保证所有语句能在slave得到和在master端执行时候相同的结果。
    另外mysql 的复制,像一些特定函数功能,slave可与master上要保持一致会有很多相关问题(如sleep()函数, last_insert_id(),以及user-defined functions(udf)会出现问题).

2) Row:不记录sql语句上下文相关信息,仅保存哪条记录被修改
    优点: binlog中可以不记录执行的sql语句的上下文相关的信息,仅需要记录那一条记录被修改成什么了。
    所以rowlevel的日志内容会非常清楚的记录下每一行数据修改的细节。而且不会出现某些特定情况下的存储过程,或function,以及trigger的调用和触发无法被正确复制的问题

    缺点:所有的执行的语句当记录到日志中的时候,都将以每行记录的修改来记录,这样可能会产生大量的日志内容,比如一条update语句,修改多条记录,则binlog中每一条修改都会有记录,这样造成binlog日志量会很大,
    特别是当执行alter table之类的语句的时候,由于表结构修改,每条记录都发生改变,那么该表每一条记录都会记录到日志中。

3) Mixedlevel: 是以上两种level的混合使用,一般的语句修改使用statment格式保存binlog,如一些函数,statement无法完成主从复制的操作,则采用row格式保存binlog
    MySQL会根据执行的每一条具体的sql语句来区分对待记录的日志形式,也就是在Statement和Row之间选择一种.新版本的MySQL中队row level模式也被做了优化,并不是所有的修改都会以row level来记录,像遇到表结构变更的时候就会以statement模式来记录。至于update或者delete等修改数据的语句,还是会记录所有行的变更
*/

-- 查看binlog 格式
mysql> show global variables like '%binlog_format%';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| binlog_format | ROW   |
+---------------+-------+
1 row in set (0.01 sec)


/*
binlog 的基本配置通过mysql的my.cnf文件的属性binlog_format指定。如以下:

    binlog_format           = MIXED                 //binlog日志格式
    log_bin                 =dir/mysql-bin.log      //binlog日志名
    expire_logs_days        = 7                     //binlog过期清理时间
    max_binlog_size         100m                    //binlog每个日志文件大小


查看ROW 格式的binlog日志,使用mysql提供的工具mysqlbinlog
[root@iZ2ze58f53sxjm9z7mgn5xZ mysql]# mysqlbinlog -v $binlog_file_name
....
....
### UPDATE `my_test`.`course`
### WHERE
###   @1=2
###   @2='PHP'
### SET
###   @1=2
###   @2='JS'
# at 18100
#220915 15:04:53 server id 1  end_log_pos 18131 CRC32 0xaebceeed        Xid = 1356
....
....


binlog 的删除:
    RESET MASTER;//删除所有binlog日志,新日志编号从头开始

    PURGE MASTER LOGS TO 'mysql-bin.010';//删除mysql-bin.010之前所有日志

    PURGE MASTER LOGS BEFORE '2003-04-02 22:46:26';// 删除2003-04-02 22:46:26之前产生的所有日志

    清除3天前的 binlog : PURGE MASTER LOGS BEFORE DATE_SUB( NOW( ), INTERVAL 3 DAY);
*/

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66

# 3. mysql 中的查询日志

/*
查询日志记录了client端所有操作语句,而binlog则不包含查询数据的sql语句,默认情况下,查询日志是没有开启的,如果要开启查询日志,可以进行配置.
*/

mysql> show variables like '%general%';
+------------------+--------------------------------------------+
| Variable_name    | Value                                      |
+------------------+--------------------------------------------+
| general_log      | OFF                                        |
| general_log_file | /var/lib/mysql/iZ2ze58f53sxjm9z7mgn5xZ.log |
+------------------+--------------------------------------------+
2 rows in set (0.00 sec)

/*
如果需要开启,则需要更改/etc/my.conf 配置文件:
    general_log=1
    general_log_file=$my_path
*/
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18

# 4. mysql 中的慢查询日志

/*
慢查询日志记录了所有执行时间超过参数long_query_time设置值并且扫描记录数不小于min_examined_limit的所有sql语句,默认没有开启.

如果需要开启,这需要编辑/etc/my.cof
slow_query_log=1 -- 开启
long_query_time -- 时间参数(默认为10S,最小为0)
*/

-- 查看开关和日志路径
mysql> show variables like '%slow_query%';
+---------------------+-----------------------------------+
| Variable_name       | Value                             |
+---------------------+-----------------------------------+
| slow_query_log      | ON                                |
| slow_query_log_file | /var/lib/mysql/localhost-slow.log |
+---------------------+-----------------------------------+
2 rows in set (0.00 sec)

/*
默认情况下,不会记录管理语句,也不会记录不使用索引进行查找的语句,可以使用log_slow_admin_statements和log_queries_not_using_indexs更改.

记录执行比较慢的管理语句
log_slow_admin_statements=1

记录执行比较慢的未使用索引的语句
log_queries_not_using_indexs=1
*/

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
Last Updated: 5/5/2023, 2:33:10 AM